🦊FLUX.1 Tools - work4ai

🦊FLUX.1 Tools

🏠 | 🦊雑に学ぶComfyUI

👈 | 🦊Flux

👉 |

ざっくり言えばFluxの開発元から出たControlNetやIP-Adapterと同様の画像編集ができるモデル達です

https://huggingface.co/black-forest-labs/FLUX.1-Fill-dev/tree/mainflux1-fill-dev.safetensors

path\to\ComfyUI\models\diffusion_modelsに配置

https://gyazo.com/9762f15bd5d36c991351b0b3e07f365b

FLUX.1 Fill.json

inpainting / outpaintingができるモデル

🟨このworkflowでは3:2に画像をpaddingしてoutpainting

ほかは通常のFluxとinpaintingのwokflow

FLUX.1 Depth / FLUX.1 Canny

https://huggingface.co/black-forest-labs/FLUX.1-Depth-dev/tree/mainflux1-depth-dev.safetensors

https://huggingface.co/black-forest-labs/FLUX.1-Canny-dev/tree/mainflux1-canny-dev.safetensors

path\to\ComfyUI\models\diffusion_modelsに配置

https://gyazo.com/936888601415279004b7db0c08389b45

FLUX.1 Depth.json

https://huggingface.co/black-forest-labs/FLUX.1-Redux-dev/tree/mainflux1-redux-dev.safetensors

path\to\ComfyUI\models\style_modelsに配置

https://huggingface.co/Comfy-Org/sigclip_vision_384/tree/mainsigclip_vision_patch14_384.safetensors

path\to\ComfyUI\models\clip_visionに配置

https://gyazo.com/c24ef37ef910fb4c9698662dc11ccf8c

FLUX.1 Redux.json

IP-Adapterのように参照画像に似た画像が生成される

複数枚を入力して混ぜることもできる

https://gyazo.com/410e052b8a4c0aecbc885bbba0e1d06f

FLUX.1 Redux_multi.json

Reduxの問題

ReduxはプロンプトやLoRA等他のパラメータを全く無視してしまいます

柔軟性がなく、strengthを十分に小さくしても(0.2程度)、参照画像と同じような画像しか生成できません

https://github.com/kaibioinfo/ComfyUI_AdvancedRefluxControlComfyUI_AdvancedReduxControl

直感に合うようにReduxの強度を調整できるようになるComfyUIカスタムノードです

https://gyazo.com/d8160e963c37b83f274e7883e8c541bb

Redux&Pulid.json

参考 : Hand-painted New Year graffiti image

🟦Apply Style Modelノードの代わりにStyleModelApplySimpleノードを使用

今回はimage_strengthをmedium

もう少しパラメータが多いReduxAdvancedノードもある

比較

https://gyazo.com/693daff69e16c857436e952497d6578dhttps://gyazo.com/22a062d0745185b90a0368e8b5f8b538https://gyazo.com/0aab352a39f13f74721254a260e23790

参照画像 / StyleModelApplySimpleノード(今回の) / Apply Style Modelノード(デフォルト)